Best automatic scores from each pair of ir-qa system in IR4QA+CCLQA Collaboration track. Columns: language pair, ir system name, qa system name, score from the automatic evaluation ======== Run types = Mandatory ======== ENCS CMUJAV ATR/NiCT 0.2763 ENCS CYUT CMUJAV 0.1746 ENCS HIT CMUJAV 0.193 ENCS MITEL ATR/NiCT 0.275 ENCS MITEL CMUJAV 0.1982 CSCS KECIR APath 0.2695 CSCS KECIR CMUJAV 0.2231 CSCS NLPAI CMUJAV 0.2037 CSCS OT APath 0.2592 CSCS OT CMUJAV 0.2045 CSCS RALI CMUJAV 0.2008 CSCS WHUCC CMUJAV 0.2059 ENJA CMUJAV CMUJAV 0.1739 ENJA CMUJAV Forst 0.2873 ENJA CYUT CMUJAV 0.0994 ENJA CYUT Forst 0.2694 ENJA TA CMUJAV 0.0102 ENJA TA Forst 0.04 JAJA BRKLY CMUJAV 0.2611 JAJA CMUJAV CMUJAV 0.2481 JAJA OT CMUJAV 0.2566 ======== Run types = Optional ======== ENCS CMUJAV KECIR 0.1684 ENCS CYUT CMUJAV 0.1997 ENCS CYUT KECIR 0.1651 ENCS HIT CMUJAV 0.2032 ENCS HIT KECIR 0.1816 ENCS MITEL CMUJAV 0.2168 ENCS MITEL KECIR 0.1829 ENCS RALI KECIR 0.1631 CSCS CMUJAV KECIR 0.1857 CSCS KECIR APath 0.2653 CSCS KECIR CMUJAV 0.2433 CSCS KECIR KECIR 0.1865 CSCS NLPAI CMUJAV 0.2161 CSCS NLPAI KECIR 0.1939 CSCS OT APath 0.2456 CSCS OT CMUJAV 0.2344 CSCS OT KECIR 0.183 CSCS RALI CMUJAV 0.2226 CSCS RALI KECIR 0.1814 CSCS WHUCC CMUJAV 0.2303 CSCS WHUCC KECIR 0.1905 ENJA CMUJAV CMUJAV 0.1684 ENJA CYUT CMUJAV 0.0667 ENJA TA CMUJAV 0.0075 JAJA BRKLY CMUJAV 0.2477 JAJA BRKLY NTCQA 0.2287 JAJA CMUJAV CMUJAV 0.2394 JAJA CMUJAV NTCQA 0.2162 JAJA OT CMUJAV 0.2333 JAJA OT NTCQA 0.205